web bot

Translations
веб-бот
The web bot crawled websites to gather relevant information.
Веб-бот сканировал сайты, чтобы собирать соответствующую информацию.